db0bc90c25df5d728b55ba6fdab2280354a8baf1
yat
- challenge
- Passage Retrieval
- submitter
- Maciej
- submitted
- 2022-11-14 20:12:12.659511 UTC
- file basename
- out
test-A / 5c944fb09fbebf56acf384f98f6927d9af1ced37
| Metric | Score |
|---|---|
| NDCG@10 | 47.54 |
dev-0 / 5976ac266bac873aa9f31d296f467a81e7109e22
| Metric | Score |
|---|---|
| NDCG@10 | 15.77 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-A NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 2421-3 1895497-0 1339527-2 3963580-0 2734991-1 162911-6 3325488-5 1284905-9 2377444-0 2734948-1 | 0.00 |
| 2 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 4334-9 140871-1 49767-0 43876-1 842394-12 49762-0 3584220-0 3572733-0 1288875-9 2005270-0 | 0.00 |
| 3 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 1635156-2 800806-4 3120956-9 4518252-14 146627-0 2984799-1 54733-2 2631259-6 145643-3 1446834-3 | 0.00 |
| 4 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 2992056-3 2375662-1 1680869-2 1680868-2 1340887-1 4978480-17 1680851-2 1680395-2 1599022-0 4805651-1 | 0.00 |
| 5 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 4086255-1 941032-0 1275792-5 37916-2 181284-0 11289-3 101709-57 162129-4 4083243-0 641196-0 | 0.00 |
| 6 | wiki-trivia Jakiego obrazu dotyczy akcja filmu Vinci? | 159017-5 89983-8 170281-11 764160-22 | 1004592-1 225555-0 779791-2 2342647-4 1602139-5 2357909-7 489854-11 3121677-1 489854-0 1152851-0 | 0.00 |
| 7 | wiki-trivia Jak nazywał się twórca Polskiej Akcji Humanitarnej? | 2733-0 437349-12 4306798-3 4211917-8 | 1522064-8 1042823-1 46203-23 4377117-2 27660-4 4097942-6 1514238-4 1000009-30 4399166-2 765923-8 | 0.00 |
| 8 | wiki-trivia Kto powołuje prezesa NIK? | 100304-0 615610-2 189807-110 2797003-26 | 443760-19 1026445-4 100304-13 100304-12 977725-3 33653-31 178235-3 10392-71 152150-8 94440-2 | 0.00 |
| 9 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 975388-2 121015-8 461101-1 2856932-0 2739552-1 5164327-13 3256060-0 21188-9 1956520-0 28808-10 | 0.00 |
| 10 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 116359-10 1300575-25 2195570-0 8148-0 2194128-0 2264168-0 2198008-0 1840674-1 1136343-0 1792-0 | 0.00 |
| 11 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 5199359-5 4710309-0 73042-0 2128782-2 354435-4 1261888-0 1576655-0 16098-2 16197-0 4476880-0 | 0.00 |
| 12 | wiki-trivia Sahara Zachodnia posiada duże złoża miedzi, fosforytów czy uranu? | 220899-2 1300844-0 | 1834-101 44828-24 175394-25 79200-7 1629966-23 122128-13 1707589-10 104-24 2195336-6 422661-2 | 0.00 |
| 13 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 113882-4 24742-7 136382-4 3151546-1 4355939-3 610227-2 2279580-16 329343-2 5098842-2 24742-3 | 0.00 |
| 14 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 30332-19 3277-36 917904-18 3277-9 1769-5 3333670-2 29-36 96488-10 3289-10 12158-14 | 0.00 |
| 15 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 1461623-5 1461623-55 1848206-24 1461623-60 1461623-10 692416-4 692416-5 2837475-1 4201896-1 457493-0 | 0.00 |
| 16 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 4357447-2 143139-38 1063248-6 64891-5 1143976-3 954783-1 2148-16 1130465-6 3678011-6 48631-5 | 0.00 |
| 17 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 3820485-0 65401-1 3809196-5 1064517-24 1157974-0 1271388-0 318249-12 978017-33 732801-0 529069-43 | 0.00 |
| 18 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 82189-7 1855996-0 170271-2 1263801-7 74536-2 1547524-3 44854-22 2789510-3 1263801-12 2174186-2 | 0.00 |
| 19 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 641798-47 513291-0 513348-0 1005884-9 3088422-0 3543302-1 506365-0 94454-0 113451-9 31868-11 | 0.00 |
| 20 | wiki-trivia Który car rosyjski wprowadził grażdankę? | 129904-0 908-2 22313-16 2854198-24 2705-7 | 4096811-0 2510536-0 892416-5 4094839-0 3557025-0 221525-9 752470-7 2080114-41 2792260-3 121977-3 | 0.00 |
| 21 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 360609-19 651828-56 1552826-228 2314724-9 1599890-1 1826361-10 667071-18 1326878-16 651828-55 20338-18 | 0.00 |
| 22 | wiki-trivia Jakim skrótem literowym oznacza się osobę o nieustalonej tożsamości? | 938989-0 57033-0 4162956-0 1249108-11 | 1919191-28 400930-2 756467-1 3185428-10 4715790-35 698175-3 1543990-4 1454-43 3168454-1 5543-45 | 0.00 |
| 23 | wiki-trivia Jak z francuskiego określamy okulary, które trzymają się tylko na nosie? | 1202545-0 | 40804-5 1541774-6 20302-10 764920-19 1419330-21 185768-12 472699-113 296925-4 4115201-51 497735-11 | 0.00 |
| 24 | wiki-trivia Czy legalny syn Napoleona zasiadł na tronie Francji? | 425167-2 | 32142-1 1765337-4 363695-7 209672-12 363695-3 1048048-3 243442-5 1658867-146 30378-9 363695-8 | 0.00 |
| 25 | wiki-trivia Z iloma państwami graniczy San Marino? | 5531-17 44915-14 | 1874026-0 1219119-0 1230661-0 5531-5 1209122-1 2028372-13 998335-0 1209122-0 5531-0 1193751-0 | 0.00 |
| 26 | wiki-trivia Jaki był najwyższy nominał obecny w obiegu przed denominacją w 1995 roku? | 2148595-1 | 4413578-6 193584-2 2048728-5 1418508-339 5156150-14 4603710-210 4413539-2 1809833-3 2549074-2 189959-1 | 0.00 |
| 27 | wiki-trivia Jak nazywa się postulat mówiący, że w atomie nie ma dwóch elektronów które by miały identyczne wszystkie cztery liczby kwantowe?… | 43681-0 | 2311468-1 2311468-5 131745-2 43683-10 6567-1 43681-3 3136885-4 43683-7 43683-6 984901-8 | 0.00 |
| 28 | wiki-trivia Który amerykański prezydent uczestniczył w konferencji pokojowej w Jałcie? | 25733-0 2261468-0 | 308840-5 911595-6 685822-2 2274-112 58590-17 2733663-98 1602497-8 10930-5 4905635-13 434394-136 | 0.00 |
| 29 | wiki-trivia Czy w Polsce panował król o imieniu Ludwik? | 18470-0 11289-2 489028-1 650042-0 1227360-0 | 974345-0 196693-1 941032-0 37916-2 33267-0 630875-93 6502-3 1367257-8 32410-0 39613-0 | 0.00 |
| 30 | wiki-trivia Funkcjonariusz państwowy który ściga przestępców i oskarża ich w sądzie to...? | 152150-0 152150-14 2194475-2 537444-1 | 5131340-0 636018-6 1525907-0 1935365-2 4376936-5 6959-15 1810145-8 2648365-1 4582830-0 2138569-3 | 0.00 |
| 31 | wiki-trivia Na cześć kogo obchodzony jest dzień Kotana? | 44879-8 174481-12 86849-16 | 1235252-3 403192-4 5060493-2 2022936-6 3243471-12 2910023-1 3243471-11 4181943-6 1827042-13 824743-3 | 0.00 |
| 32 | wiki-trivia Symbolem którego pierwiastka jest Cr? | 825-0 1676212-0 | 5422-2 896285-6 30333-0 182850-2 24742-9 30330-19 3968911-2 149499-4 30332-1 8807-0 | 0.00 |
| 33 | wiki-trivia Jak nazywała się dawna rezydencja cesarska w Pekinie? | 74254-0 95568-1 | 5118265-5 1910978-5 2847383-0 5047935-0 1309650-5 4138745-0 2070144-0 5047935-16 904989-6 1906305-0 | 0.00 |
| 34 | wiki-trivia Jaką nazwę noszą połączone izby Sejmu i Senatu RP? | 2462290-5 589110-0 33023-0 189807-44 3039370-2 | 655213-1 8653-3 3574207-12 2462290-7 5754-14 115492-7 1154086-13 1386406-1 2433825-14 2461754-10 | 0.00 |
| 35 | wiki-trivia Jak nazywa się na statku oficer zajmujący się sprawami gospodarczymi? | 558647-0 558647-1 | 4570607-2 3299821-51 2848803-175 391783-7 1091335-0 524505-0 391783-4 391783-28 523654-0 2909498-11 | 0.00 |
| 36 | wiki-trivia Kto jest autorem wiersza o Słoniu Trąbalskim? | 23626-20 1757856-4 4439842-4 | 1148354-2 1163812-47 655344-2 1541044-10 3520259-2 5128431-61 141945-2 68774-113 4369874-32 191002-5 | 0.00 |
| 37 | wiki-trivia Co według piosenki puka w rytmie cha-cha? | 389424-0 1274995-6 781704-2 | 1440830-1 727905-3 2638510-1 771940-1 727905-2 4329291-1 16583-2 205812-22 756474-18 16583-0 | 0.00 |
| 38 | wiki-trivia W którym roku Otton III i Bolesław Chrobry spotkali się na zjeździe gnieźnieńskim? | 2048803-0 1930212-0 8196-0 44843-1 411720-13 | 1876386-10 44843-19 1643289-1 626730-43 913829-7 93712-17 1643289-4 2048803-1 10559-0 178262-4 | 0.00 |
| 39 | wiki-trivia Jak miała na imię żona Heraklesa? | 3136602-0 39725-0 11468-0 11468-22 39725-2 | 1081971-1 27899-48 204427-45 3360868-36 2285-14 12500-1 544826-0 11469-0 181206-1 1906318-11 | 0.00 |
| 40 | wiki-trivia Jak nazywa się niekonwencjonalna metoda leczenia polegająca na uciskaniu określonych punktów na ciele pacjenta? | 73836-0 274656-2 73824-12 | 144100-15 2951734-10 65265-7 663989-0 4460-3 776120-13 115212-16 3710676-1 4297196-3 760586-0 | 0.00 |